EpiCon:通过共演化多模态记忆的智能体集体学习
🧭 多智能体共享多模态经验记忆 ★ 深度解读
MIT-IBM Computing Research Lab · University of Rochester · Massachusetts Institute of Technology
共享多模态外部记忆,两个2B模型负责经验更新与树形巩固,支持跨智能体系统复用且不动宿主参数
📌 工作参考价值(4 点)
- 可把 EpiCon 的共享外部记忆模式用于电商 Agent 中台:将 query 理解、商品图/详情页文档审核、素材生成等成功/失败轨迹沉淀为可复用 lessons 和规则,不同场景或模型版本直接检索复用,主模型不用再训练。
- 用 2B 小模型做 memory controller / tree organizer,而不是直接调骨干模型管理记忆,可降低 67–74% 记忆操作耗时;对需要频繁读写外部记忆的线上 Agent 有直接工程收益。
- 树形经验组织与 consolidation 生成规则,比扁平 memory 稳定;可借鉴 Place/Merge/Split+Lift 与容量 partition,对用户分群、商品类目、店铺运营等多层级知识做抽象和冲突消解。
- 自适应视觉注入 gate 值得迁移到多模态推荐/搜索:根据当前 query 和 memory 描述决定是否附带图片区域,减少无关视觉 token,提升上下文效率,尤其适合商品多图、详情页截图等长上下文场景。
AutoViewMem:自配置正交视图的对话长期记忆框架
🧭 Agent 长期记忆 · 多视图写入组织 ★ 深度解读
National University of Defense Technology
在写入时用自配置低重叠语义视图组织长期对话记忆,使简单 top-K 检索即可稳定找到相关证据
📌 工作参考价值(4 点)
- 对电商导购 / 客服 Agent 的用户长期记忆,不要把所有对话日志压成一个 embedding;可借鉴 AutoViewMem 用多个语义视图(如偏好、预算、物流、售后、家庭结构)在写入时抽取结构化字段,降低后续检索的语义干扰。
- 视图选择可用 DPP 做低重叠、多样化的轻量 schema 选择:每 N 个会话块让 LLM 候选生成视图,再用同一 dense encoder 嵌入并选 top-K,工程成本可控,且能动态适应用户专属画像。
- 检索评估必须按 provenance / 证据 ID 去重,否则同一证据在不同视图下重复命中会虚高;落地时给每条记忆打 timestamp、view tag、source span ID,便于审计、回滚和线上诊断。
- 离线 consolidation 可用 embedding 相似度构图 + LLM 裁决合并冗余,但要保留 provenance 并谨慎处理时间版本与冲突;可异步执行,不改变在线检索链路,适合 Agent 长期记忆增量化维护。
MindMemOS:可移植自演化的 AI Agent 记忆操作系统
🧭 Agent 记忆操作系统与自我演化 ★ 深度解读
Noah's Ark Lab, Huawei Technologies
提出实体-属性-时间三维记忆结构与四类自演化机制,实现可移植、自演化的 Agent 记忆层
📌 工作参考价值(4 点)
- 用户画像与偏好演化:借鉴 3D entity-property-time 结构,把电商/推荐场景中的用户、商品、偏好事件建模为实体、属性、时间线,支持偏好变更、冲突版本管理与时序推理。相比纯文本记忆,更适合追踪用户兴趣漂移(例如 LOCOMO 的 temporal/multi-hop 问题)。
- 离线记忆压缩与冲突解决:Dreaming 机制把线上增量写入造成的冗余、过期、冲突记录离线合并、归档并保留 provenance。在推荐/广告场景可用于定期压缩用户行为记忆,保证活跃记忆库不过度膨胀,同时保持检索质量(论文中 AMCR 约 20%,准确率反升)。
- 隐式反馈分类与记忆修正:将用户对 Agent 的纠正按持久性分为 task-temporary / scenario-specific / long-term,避免把一次性指令写入长期记忆。电商导购、对话式推荐中可据此捕获用户隐含偏好与约束,减少重复推荐错误,尤其适合处理“这次不要”、“以后都这样”等模糊纠正。
- 轨迹驱动的技能演化:MindSkillEvolve 将 Agent 执行轨迹提炼为可复用、版本化的技能,可通过 unsupervised 或 score-guided 方式持续改进 SOP。可迁移到客服/导购 Agent 的流程能力迭代:用真实对话与任务执行日志自动总结高效策略与失败模式,生成可回滚的技能版本。
语言模型也需要睡眠:离线递归巩固长时记忆以支持深层推理
🧭 序列模型记忆巩固 · 离线递归计算 ★ 深度解读
Carnegie Mellon University · University of Maryland
在SSM-Attention混合模型中引入离线递归更新快权重,将计算移出推理时,提升对已逐出上下文的深层推理能力
📌 工作参考价值(4 点)
- 离线递归巩固用户长序列行为:电商推荐中用户行为序列很长,可将sleep机制用于在上下文窗满时将历史行为压缩进SSM或fast weight记忆,并迭代更新几次后再清空KV缓存,后续预测只需单次前向,保证在线低延迟。
- Fast weight显式存储推理中间态:在生成式推荐(如Semantic ID序列)中,可将用户兴趣演化视为一种需要“深度计算”的推理过程,利用递归快权重更新逐步聚合信息,而非仅依赖固定深度的Encoder,这与当前多智体(Agent)记忆压缩的场景可类比。
- 递归深度可自适应难度:根据当前交互的复杂程度(如查询涉及的hop数)自动调节sleep的递归步数N,类似动态网络深度,简单场景用N=1快速响应,复杂推理场景用更大N保证精度。
- 训练时通过递归快权重反向传播:在离线训练时采用类似递推跨窗的梯度回传,避免全序列并行的高内存,可处理超长用户序列,与当前推荐系统流式训练架构兼容。